eval_batch_size:13107200, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0569    recall@10 : 0.0859    recall@20 : 0.1226    recall@50 : 0.1868    mrr@5 : (0.0337+0j)    mrr@10 : (0.0377+0j)    mrr@20 : (0.0403+0j)    mrr@50 : (0.0425+0j)    ndcg@5 : (0.0389+0j)    ndcg@10 : (0.0483+0j)    ndcg@20 : (0.0577+0j)    ndcg@50 : (0.0706+0j)    hit@5 : 0.059    hit@10 : 0.0894    hit@20 : 0.1283    hit@50 : 0.1965    precision@5 : 0.0119    precision@10 : 0.009    precision@20 : 0.0065    precision@50 : 0.004
Test result:
recall@5 : 0.0622    recall@10 : 0.0895    recall@20 : 0.1261    recall@50 : 0.1875    mrr@5 : (0.0374+0j)    mrr@10 : (0.0413+0j)    mrr@20 : (0.0439+0j)    mrr@50 : (0.046+0j)    ndcg@5 : (0.0428+0j)    ndcg@10 : (0.0517+0j)    ndcg@20 : (0.0611+0j)    ndcg@50 : (0.0735+0j)    hit@5 : 0.065    hit@10 : 0.0942    hit@20 : 0.1329    hit@50 : 0.1978    precision@5 : 0.013    precision@10 : 0.0095    precision@20 : 0.0067    precision@50 : 0.0041

eval_batch_size:13107200, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0533    recall@10 : 0.0795    recall@20 : 0.1153    recall@50 : 0.1817    mrr@5 : (0.0308+0j)    mrr@10 : (0.0344+0j)    mrr@20 : (0.037+0j)    mrr@50 : (0.0392+0j)    ndcg@5 : (0.036+0j)    ndcg@10 : (0.0445+0j)    ndcg@20 : (0.0536+0j)    ndcg@50 : (0.0669+0j)    hit@5 : 0.0551    hit@10 : 0.0822    hit@20 : 0.12    hit@50 : 0.1899    precision@5 : 0.0111    precision@10 : 0.0083    precision@20 : 0.0061    precision@50 : 0.0039
Test result:
recall@5 : 0.055    recall@10 : 0.0843    recall@20 : 0.1198    recall@50 : 0.1805    mrr@5 : (0.0335+0j)    mrr@10 : (0.0376+0j)    mrr@20 : (0.0402+0j)    mrr@50 : (0.0422+0j)    ndcg@5 : (0.0381+0j)    ndcg@10 : (0.0477+0j)    ndcg@20 : (0.0568+0j)    ndcg@50 : (0.069+0j)    hit@5 : 0.0574    hit@10 : 0.0886    hit@20 : 0.126    hit@50 : 0.1905    precision@5 : 0.0115    precision@10 : 0.0089    precision@20 : 0.0064    precision@50 : 0.0039

eval_batch_size:13107200, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0577    recall@10 : 0.0858    recall@20 : 0.123    recall@50 : 0.1909    mrr@5 : (0.0347+0j)    mrr@10 : (0.0386+0j)    mrr@20 : (0.0413+0j)    mrr@50 : (0.0435+0j)    ndcg@5 : (0.0399+0j)    ndcg@10 : (0.049+0j)    ndcg@20 : (0.0584+0j)    ndcg@50 : (0.0722+0j)    hit@5 : 0.06    hit@10 : 0.0895    hit@20 : 0.1287    hit@50 : 0.2003    precision@5 : 0.0121    precision@10 : 0.009    precision@20 : 0.0065    precision@50 : 0.0041
Test result:
recall@5 : 0.0625    recall@10 : 0.0897    recall@20 : 0.1297    recall@50 : 0.1911    mrr@5 : (0.0371+0j)    mrr@10 : (0.041+0j)    mrr@20 : (0.0439+0j)    mrr@50 : (0.0459+0j)    ndcg@5 : (0.0426+0j)    ndcg@10 : (0.0515+0j)    ndcg@20 : (0.0617+0j)    ndcg@50 : (0.0741+0j)    hit@5 : 0.0654    hit@10 : 0.0945    hit@20 : 0.137    hit@50 : 0.2017    precision@5 : 0.0131    precision@10 : 0.0095    precision@20 : 0.007    precision@50 : 0.0042

eval_batch_size:13107200, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0524    recall@10 : 0.0806    recall@20 : 0.1158    recall@50 : 0.1819    mrr@5 : (0.0302+0j)    mrr@10 : (0.034+0j)    mrr@20 : (0.0366+0j)    mrr@50 : (0.0388+0j)    ndcg@5 : (0.0352+0j)    ndcg@10 : (0.0444+0j)    ndcg@20 : (0.0533+0j)    ndcg@50 : (0.0667+0j)    hit@5 : 0.0542    hit@10 : 0.0836    hit@20 : 0.1207    hit@50 : 0.1909    precision@5 : 0.0109    precision@10 : 0.0084    precision@20 : 0.0061    precision@50 : 0.0039
Test result:
recall@5 : 0.0547    recall@10 : 0.0821    recall@20 : 0.1188    recall@50 : 0.1777    mrr@5 : (0.0338+0j)    mrr@10 : (0.0377+0j)    mrr@20 : (0.0403+0j)    mrr@50 : (0.0422+0j)    ndcg@5 : (0.0383+0j)    ndcg@10 : (0.0472+0j)    ndcg@20 : (0.0566+0j)    ndcg@50 : (0.0684+0j)    hit@5 : 0.0569    hit@10 : 0.0864    hit@20 : 0.1249    hit@50 : 0.1871    precision@5 : 0.0114    precision@10 : 0.0087    precision@20 : 0.0063    precision@50 : 0.0038

